package com.atguigu.bigdata.chapter05.transform;

import com.atguigu.bigdata.bean.WaterSensor;
import org.apache.flink.api.common.functions.MapFunction;
import org.apache.flink.api.common.functions.ReduceFunction;
import org.apache.flink.configuration.Configuration;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;

/**
 * @Author lzc
 * @Date 2022/9/2 10:26
 */
public class Flink12_Reduce {
    public static void main(String[] args) {
        Configuration conf = new Configuration();
        conf.setInteger("rest.port", 2000);
        StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(conf);
        env.setParallelism(1);
        
        // 统计每个传感器的水位和
        env
            .readTextFile("input/sensor.txt")
            .map(new MapFunction<String, WaterSensor>() {
                @Override
                public WaterSensor map(String value) throws Exception {
                    String[] data = value.split(",");
                    return new WaterSensor(
                        data[0],
                        Long.valueOf(data[1]),
                        Integer.valueOf(data[2])
                    );
                }
            })
            .keyBy(WaterSensor::getId)  // 方法引用
            .reduce(new ReduceFunction<WaterSensor>() {
                // 参数1: 上次聚合的结果  没事2: 这次需要聚合的元素
                // 当某个key第一个数据进来是, 这个方法根本就不执行, 直接输出结果
                @Override
                public WaterSensor reduce(WaterSensor value1,
                                          WaterSensor value2) throws Exception {
                    // 用不用对id操作? 不用, 只有id一样的才会被聚合在一起
                    
                    // ts ? 其实是第一个
//                    System.out.println(value1.getId() + "   ");
                    value2.setVc(value1.getVc() + value2.getVc());  // ts是最新
                    value1.setVc(value1.getVc() + value2.getVc());  // ts是第一个
//                    value1.setVc(Math.max(value1.getVc(), value2.getVc()));
                    return value2;
                }
            })
            .print();
        
        try {
            env.execute();
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
}
/*
简单滚动聚合
    sum
    max min
    maxBy minBy
        非分组字段和聚合字段, 会随着最大或最小取
    
    只能对其中的一个字段聚合
    
    只能聚合数字类型

reduce
    聚合后的类型和聚合前的类型一致
    
    可以同时聚合对个字段
    
    要聚合的字段类型无所谓
 
 
 
 */